RESUMO
Resumo Introdução: A Autoavaliação das Práticas de Segurança do Paciente é um ato regulatório para melhoria da qualidade do cuidado. Porém, há dúvidas sobre a validade das suas informações. O objetivo deste estudo foi analisar a sua confiabilidade. Método: Estudo piloto de análise da confiabilidade de 21 indicadores simples e um composto da autoavaliação como forma de embasar uma amostra nacional em estudos futuros. Participaram hospitais com leitos de terapia intensiva e comparou dados da Autoavaliação (AA) e Autoavaliação Revisada (AR) pela vigilância sanitária (Visa) com a Inspeção Presencial (IP). A análise incluiu os coeficientes Kappa e de correlação intraclasse. Resultados: Comparando com a IP, a concordância foi aceitável (Kappa≥0,4) em 12 indicadores da AA e em 18 da AR. Os indicadores menos confiáveis são relativos a protocolos de prevenção de infecções. Quanto ao indicador composto do nível de adesão, a confiabilidade melhorou com revisão da Visa (AA=0,89 e AR=0,94), embora a concordância da classificação de alta conformidade tenha sido baixa. Conclusões: A AR se mostrou essencial para melhorar a confiabilidade da Autoavaliação. Ademais, identificou-se necessidade de revisar alguns indicadores e o instrumento de verificação pela Visa.
Abstract Introduction: The Patient Safety Self-Assessment Practices is a regulatory action to enhance quality of care. However, validation of its information requires attention. This study aimed to analyze reliability of the Patient Safety Self-Assessment Practices. Methods: Pilot study analyzing the reliability of 21 simple indicators and 1 composite of self-assessment to provide a national sample in future studies. Hospitals with intensive unit care beds participated in the study, and data from self-assessment (SA) and revised self-assessment (RSA) by the health surveillance (HS) were compared with on-site inspection (OSI). Analyses included Kappa and intraclass correlation coefficients. Results: Concordance was satisfactory (Kappa ≥ 0.4) in 12 indicators of SA and 18 indicators of RSA compared with OSI. The least reliable indicators were related to infection prevention protocols. Reliability of the adherence level composite indicator improved with HS revision (SA = 0.89 and RSA = 0.94), despite the low concordance of the high compliance classification. Conclusion: RSA was essential to improve reliability of SA. In addition, some indicators and assessment tools of the HS need revision.
Assuntos
Avaliação em Saúde , Regulação e Fiscalização em Saúde , Sistema Nacional de Vigilância em Saúde , Agência Nacional de Vigilância Sanitária , Segurança do Paciente/legislação & jurisprudência , Confiabilidade dos Dados , BrasilRESUMO
Introdução: A Autoavaliação das Práticas de Segurança do Paciente é uma iniciativa do Sistema Nacional de Vigilância Sanitária para a identificação e monitoramento de riscos em serviços de saúde brasileiros mediante autoinspeção. Anualmente, os serviços participantes podem ser classificados em alta adesão às práticas seguras com base em 21 indicadores. Embora essa iniciativa seja promissora, é preciso avaliar a confiabilidade dos indicadores simples e do indicador composto de alta adesão. Objetivo: Analisar a confiabilidade dos indicadores da Autoavaliação das Práticas de Segurança do Paciente em hospitais do Rio Grande do Norte. Método: O delineamento foi um estudo piloto observacional transversal com análise da concordância entre informações oriundas da autoavaliação e da inspeção presencial, que é considerado o padrão ouro. A amostra foi aleatória com 10 participantes dentre os 27 hospitais com leitos de UTI do estado do Rio Grande do Norte que responderam a Autoavaliação em 2019. Após coletar os dados da autoavaliação (brutos e revisados pela vigilância sanitária), uma equipe de vigilância sanitária realizou uma inspeção presencial independente nos hospitais para averiguar a conformidade in loco. A confiabilidade dos 21 indicadores simples e do indicador composto de alta adesão foi analisada com índice de concordância geral (ICG), coeficiente Kappa, coeficiente de correlação intraclasse (CCI), gráficos de Bland e Altman e teste quiquadrado. Resultados: apesar do ICG dos critérios individualmente não ter apresentado percentual acima de 90%, este foi significativo para a maioria dos critérios. E o ICG do indicador composto concordou na comparação da autoavaliação revista pela VISA e inspeção presencial. Assim como o CCI de foi de 0,89 e 0,80 (IC 95%) em ambas as comparações. Os valores de Kappa foram bem divergentes, oscilando de -0,32 até 1,00, para os indicadores simples, mas o indicador composto apresentou relativa confiabilidade. Os critérios com menor confiabilidades são os relacionados aos protocolos assistenciais. O gráfico Bland e Altman mostrou adequada concordância entre os pares de medições da Autoavaliação revista pela VISA e inspeção presencial (p>0.05). Conclusões: Este estudo piloto fornece um método potencialmente útil para mensurar periodicamente a confiabilidade das autoavaliações de práticas de segurança do paciente. Foram identificados indicadores que precisam de revisão de sua descrição e esclarecimentos, para aumentar sua confiabilidade. Embora tenham sido detectados problemas em alguns indicadores simples, o indicador composto de alta adesão foi confiável tanto em relação aos dados brutos enviados pelos hospitais como àqueles revisados pela vigilância sanitária e inspeção presencial (AU).
Introduction: The Self-Assessment of Patient Safety Practices is an initiative of the National Health Surveillance System for the identification and monitoring of risks in Brazilian health services through self-inspection. Annually, participating services can be classified as highly compliant with safe practices based on 21 indicators. Although this initiative is promising, it is necessary to assess the reliability of the simple indicators and the high adherence composite indicator. Objective: To analyze self-assessment indicators of Patient Safety Practices in hospitals in Rio Grande do Norte. Method: The design was a cross-sectional observational pilot study with analysis of the agreement between information from self-assessment and face-to-face inspection, which is considered the gold standard. The sample was random with 10 participants from the 27 ICUbed hospitals in the state of Rio Grande do Norte who responded to the Self-Assessment in 2019. After collecting self-assessment data (raw and revised by health surveillance), a health surveillance team performed an independent face-to-face inspection at hospitals to verify onsite compliance. The reliability of the 21 simple indicators and the high adherence composite indicator was analyzed with general agreement index, Kappa coefficient, intraclass correlation coefficient, Bland and Altman plots, and chi-square test. Results: although the ICG of the criteria individually did not present a percentage above 90%, this was significant for most criteria. And the composite indicator ICG agreed to compare the revised self-assessment by VISA and face-to-face inspection. Likewise, the ICC of 0.89 and 0.80 (95% CI) in both comparisons. Kappa values were quite divergent, ranging from -0.32 to 1.00, for simple indicators, but the composite indicator showed relative reliability. The criteria with the least reliability are those related to assistance protocols. The Bland and Altman graph showed adequate agreement between the pairs of measurements from the Self-Assessment revised by VISA and face-to-face inspection (p> 0.05). Conclusions: This pilot study provides a potentially useful method for periodically measuring the reliability of patient safety practice self-assessments. Indicators that need a review of their description and clarification have been identified to increase their reliability. Although problems were detected in some simple indicators, the high adherence composite indicator was reliable both in terms of raw data sent by hospitals and those reviewed by health surveillance and face-to-face inspection (AU).
Assuntos
Avaliação em Saúde/métodos , Vigilância Sanitária , Regulação e Fiscalização em Saúde , Segurança do Paciente/estatística & dados numéricos , Confiabilidade dos Dados , Distribuição de Qui-Quadrado , Estudo de AvaliaçãoRESUMO
A água destinada ao consumo humano deve atender aos padrões de potabilidade em consonância com a Portaria Nº 2.914 /2011 do Ministério da Saúde. Sabe-se que as alterações nas características físicas, químicas, microbiológicas e/ou radioativas podem colocar em risco a saúde das pessoas. O objetivo desta pesquisa foi analisar a qualidade da água consumida por crianças em Unidades de Educação Infantil (UEI) na cidade de Mossoró, estado do Rio Grande do Norte. Para tanto, tomou-se por base os laudos laboratoriais arquivados no banco de dados do setor de Vigilância Sanitária proveniente de inspeções sanitárias. Trata-se de um estudo exploratório, descritivo, realizado em 33 estabelecimentos de ensino no ano de 2012. Os resultados apontam que a água analisada apresenta-se imprópria para o consumo humano em 60,6% das UEI à medida que se detectou a presença de coliformes totais e/ou coliformes termo tolerantes, mostrando a necessidade de providencias imediata por parte do poder público, com vistas a proteger a saúde das crianças. Faz-se necessário também, capacitar os gestores e educadores para que, de forma consciente, adotem medidas de higiene nos bebedouros, filtros e reservatórios nas UEI de Mossoró/RN (AU).
Water intended for human consumption must meet potability standards in accordance with the Ordinance No. 2,914/2011 of the Ministry of Health. It is known that changes in physical, chemical, microbiological and/or radioactive characteristics can endanger people's health. The goal of this research was to assess the quality of water consumed by children in Early Childhood Education Units (ECEU) in the city of Mossoró, State of Rio Grande do Norte, Brazil. To this end, the research was based on the laboratory reports from sanitary inspections filed in the database of the Sanitary Surveillance Department. This is an exploratory and descriptive study, conducted in 33 schools in 2012. The results indicate that the water analyzed was unfit for human consumption in 60.6% of the ECEU, since the presence of total coliforms and/or thermotolerant coliforms was detected, showing the need for immediate action taken by public authorities, in order to protect children's health. It is also necessary to empower managers and teachers so that they can consciously adopt hygiene measures in water fountains, filters and reservoirs in the ECEU of Mossoró (RN) (AU).
